Amazon Data Firehose

https://gyazo.com/cfff5eb536b9cfdfc37a11140e8523a5

a.k.a. Amazon Kinesis Data Firehose

Apache ParquetApache Parquet.icon 形式に變換して batch で Amazon S3Amazon S3.icon に保存する、等

追記する以上の事をやるには

AWS LambdaAWS Lambda.iconで變換する

Amazon S3Amazon S3.iconに保存してから S3 event 通知或いは batch で變換する

https://gyazo.com/ab5f639fa1e35382e5c5862827e996d2

https://gyazo.com/3bf797b1ee92a0c60be82fe1c2950269

PutRecord

PutRecordBatch

Amazon AthenaAmazon Athena.icon の partition に使ふ

Apache Parquet 形式に變換して、Amazon AthenaAmazon Athena.icon を速く・安くする